Di dunia Generasi yang Diperkaya Pencarian, kita sering menjadi korban dari Paradoks Demo. Prototipe mungkin tampak sempurna karena diuji pada jalur 'yang menyenangkan'—satu file PDF bersih dan tiga pertanyaan pilihan yang terpilih dengan baik. Namun, sistem yang dapat digunakan bukan dibangun dari pencapaian individu seperti kesamaan vektor tinggi; melainkan lahir dari sistem yang dapat digunakan bukan dibangun dari pencapaian individu seperti kesamaan vektor tinggi; melainkan lahir dari integrasi pipeline sembilan tahapan berbeda yang bekerja secara sinergi.

Kesalahan Metrik Terisolasi

Recall tinggi dalam pencarian tidak berarti apa-apa jika Tahap 1 (Ingesti) menghilangkan metadata yang diperlukan untuk kutipan. Sistem yang benar-benar terintegrasi MVP membutuhkan 'lingkaran tertutup' di mana strategi pemecahan dirancang secara eksplisit untuk memasok kemampuan penalaran generator di tahap selanjutnya.

Observabilitas sebagai Kebutuhan

Beralih ke produksi berarti menerapkan observabilitas secara menyeluruh di seluruh arsitektur. Kita harus memantau transisi dari pertanyaan ke bukti hingga jawaban, memastikan perilaku sistem mencerminkan teori desain, terutama saat menghadapi dokumen dunia nyata yang kacau.